وزن دهی بهینه به سؤال ها و خرده آزمون های ورودی برای ساخت نمره کل ترکیبی

Authors

سلیمان ذوالفقارنسب

کارشناس ارشد پژوهشی مرکز تحقیقات، ارزشیابی، اعنبارسنجی و تضمین کیفیت آموزش عالی سازمان سنجش آموزش کشور ابراهیم خدایی

دانشیار دانشگاه تهران غلامرضا یادگارزاده

عضو هیأت علمی سازمان سنجش آموزش کشور

abstract

این تحقیق به منظور وزن دهی بهینه به خرده آزمون ها و سؤال های آزمون سراسری برای ساخت نمره کل ترکیبی انجام شده است. هدف نهایی این تحقیق پایین آوردن خطای اندازه گیری نمره کل ترکیبی بر اساس نظریه کلاسیک آزمون سازی بود. وزن دهی در سه سطح صورت گرفته است نخست آزمون سی سؤالی چهارگزینه ای حساب دیفرانسیل که نمونه آن 3409 نفر بود بر اساس وزن دهی در سطح گزینه های سؤال (درصد محبوبیت گزینه ها، نمره فرمولی) و در سطح سؤال (سرجمع ساده بدون وزن یا وزن مؤثر سؤال، وزن عاملی سؤال و وزن دشواری سؤال) وزن دهی شده اند. همچنین در سطح خرده آزمون یک مجموعه آزمون سراسری دستیاری پزشکی با پنج خرده آزمون با طول برابر شش سؤال که نمونه آن 3572 نفر بود نیز به روش های مختلف (متوسط ضریب همبستگی پیرسون، وزن عاملی و ضرایب رگرسیون) وزن دهی شده اند. به علاوه یک مجموعه آزمون دستیاری پزشکی دیگر با طول خرده آزمون های نابرابر به ترتیب 45، 26، 24، 6 و 6 سؤال که در بین گروه 3638 نفری اجرا شده بر اساس وزن مؤثر خود خرده آزمون ها (بدون وزن) مورد بررسی قرار گرفته است. این تحقیق نشان داد که روش نمره فرمولی بیشترین واریانس خطا را نسبت به دیگر روش ها تولید می کند. تنها وزن دهی بر اساس دشواری سؤال می تواند رتبه بندی افراد را به نفع افراد شایسته تر تغییر دهد و دیگر روش های وزن دهی برای افزایش پایایی رضایت بخش نیستند و ضریب پایایی آزمون در همان ابتدا تحت تأثیر سؤال های خوب و خرده آزمون های خوش ساخت با طول بهینه است.

Upgrade to premium to download articles

Sign up to access the full text

Already have an account?login

similar resources

وزن‌دهی بهینه به سؤال‌ها و خرده آزمون‌های ورودی برای ساخت نمره کل ترکیبی

این تحقیق به منظور وزن‌دهی بهینه به خرده آزمون‌ها و سؤال‌های آزمون سراسری برای ساخت نمره کل ترکیبی انجام شده است. هدف نهایی این تحقیق پایین آوردن خطای اندازه‌گیری نمره کل ترکیبی بر اساس نظریه کلاسیک آزمون‌سازی بود. وزن‌دهی در سه سطح صورت گرفته است نخست آزمون سی سؤالی چهارگزینه‌ای حساب دیفرانسیل که نمونه آن 3409 نفر بود بر اساس وزن‌دهی در سطح گزینه‌های سؤال (درصد محبوبیت گزینه‌ها، نمره فرمولی) و...

full text

تاثیر مدل وزن دهی و نمره کل سازی سوابق تحصیلی بر کارایی گزینش داوطلبان ورود به دانشگاه ها و مراکز آموزش عالی کشور

هدف از پژوهش حاضر شناسایی وزن هریک از دروس سوابق تحصیلی و نمره کل سازی براساس رویکردهای روانسنجی تحلیل عاملی و مدل پیوسته IRT و رویکردهای مبتنی بر نظر متخصصان تاپسیس و AHP،  و همچنین مقایسه اثر مدل وزن دهی بر واریانس، پایایی و روایی پیش بین نمرات کل سوابق تحصیلی بود. روش پژوهش حاضر ترکیبی بود. به منظور اجرای پژوهش در بخش اول 11 آیتم(دروس) سوابق تحصیلی از گروه متخصصان مورد نظرخواهی قرار گرفت و ب...

full text

تاثیر مدل وزن دهی بر نمره کل سازی سوابق تحصیلی و رتبه بندی داوطلبان ورود به دانشگاه ها و مراکز آموزش عالی کشور

هدف از پژوهش حاضر شناسایی وزن هریک از دروس سوابق تحصیلی و نمره کل سازی براساس رویکرد روانسنجی مدل پیوسته IRT و رویکردهای مبتنی بر نظر متخصصان تاپسیس و AHP، و همچنین مقایسه اثر مدل وزن دهی بر رتبه بندی و پایایی روش های وزن دهی و نمره کل سازی سوابق تحصیلی بود. روش پژوهش حاضر ترکیبی بود. به منظور اجرای پژوهش در بخش اول 11 آیتم(دروس) سوابق تحصیلی از گروه متخصصان مورد نظرخواهی قرار گرفت و با استفاده...

full text

نمره دهی به آزمون های تشریحی: روش ها، چالش ها و راهکارها

تاریخ دریافت 03/05/1394 تاریخ پذیرش 26/07/1394 چکیده پیش زمینه و هدف: تحقیقات نشان داده است که یادگیری دانشجویان تحت تأثیر مستقیم روش های ارزشیابی است. به اعتقاد بسیاری از پژوهشگران سؤال های تشریحی روش های برتر یادگیری را برمی انگیزند، اما دراین بین نحوه نمره دهی آزمون های تشریحی چالش بزرگی است که در بسیاری از موارد سبب بی اعتباری نمرات حاصل از آزمون می شود. برخلاف آزمون های عینی که اندازه گیری...

full text

ساخت و رواسازی آزمون تفکر انتقادی: کاربرد نظریه سؤال-پاسخ

مطالعه حاضر با هدف ساخت و رواسازی آزمون تفکر انتقادی با استفاده از نظریه سؤال ـ پاسخ انجام گرفت. بدین‌منظور از بین دانشجویان دانشگاه‌های قم و شیخ مفید، یک نمونه به اندازه (478=n) انتخاب، و پرسشنامه موردنظر با همکاری آن­ها اجرا شد. از بین مدل‌های مختلف در نظریه سوال ـ پاسخ، مدل سه پارامتری مناسب تشخیص داده ‌شد. داده‌ها با کاربرد مدل لوجستیک سه ‌پارامتری تحلیل ‌شد. به‌منظور بررسی مفروضه‌های این ن...

full text

طراحی خزانه‌های سؤال بهینه برای سنجش انطباقی کامپیوتری با در نظر گرفتن امنیت آزمون

سنجش انطباقی کامپیوتری به خزانه‌ سؤالی نیاز دارد که به ‌خوبی طراحی شده و برای ساخت آزمون‌های مجزا، تعداد مناسبی  سؤال‌ داشته باشد. همچنین شامل سؤال‌هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه‌ ساخت آزمون را کاهش دهد. یکی از روش‌های طراحی خزانه‌ سؤال، روش رِکیس است، که در آن از روش مونت‌کارلو برای تعیین ویژگی‌های یک خزانه‌ سؤال بهینه استفاده می‌شود. در این پژوهش، از این روش برای طراحی خزانه‌...

full text

My Resources

Save resource for easier access later


Journal title:
مطالعات اندازه گیری و ارزشیابی آموزشی

جلد ۳، شماره ۴، صفحات ۷۹-۱۰۴

Hosted on Doprax cloud platform doprax.com

copyright © 2015-2023